SHOPIFY 定量可用性測試/問卷調查

型別(TYPE)主題(SUBJECT)專案規模(PROJECT SIZE)
網站B2B / 企業服務小型
指標原值現值改變
完成任務所用時間59 秒64 秒+8%(變慢)
使用難易評分6/75.8/7-3%(變差)
成功率90%90%無變化
信心評分6.1/76.1/7無變化

說實話,Shopify這次Billing頁的改版結果並不“驚豔”,但對我們UX團隊來說,卻是一次非常寶貴的實踐積累。

背景是這樣:Shopify平臺每天服務著上百萬商家,Billing 這個頁面對商戶來說就是他們的“賬本入口”。從信用卡資訊,到賬單記錄、歷史發票、即將扣費的條目,全都集中在這兒。但問題是,有些使用者在找歷史賬單時總是卡住,甚至需要聯絡客服幫他們下載。作為一個做SaaS工具的平臺,這顯然不夠自助。

Funbi Makinde,我們團隊的UX Researcher,在翻了幾百條客服工單後,拉起了Billing的改版計劃。她說:“人們對錢特別敏感,哪怕賬單裡有一筆$0.01的異常,他們都會打電話來問。我們必須讓他們自己就能看懂。”

於是我們跑了Benchmarking專案:定量+定性齊上,量化測試任務完成時間、成功率、信心評分;同時安排觀察、深訪,看他們怎麼使用頁面,卡在哪,點了哪兒,沒點哪兒。

我們改了這些東西:

新版本上線後,我們跑了一輪正式的量化測試:結果非常微妙。

但別急著說“失敗”。其實我們在定性觀察裡發現了一些重要的行為變化,比如使用者對資訊分割槽的理解更清晰了,雖然沒有直接體現在分數上,但他們的探索路徑更短、誤點更少,而且我們聽到了更具體的建議:哪些按鈕他們沒看見、哪些標籤他們理解錯了。

Funbi說得特別好:“有些設計改動不會馬上反映在指標上,但你必須用量化方法把它們拆解出來,知道‘是沒變’,還是‘其實變好了,只是方式不同’。”

而且這個專案最大的收穫,是逼著我們建立了一個UX基準測試工具包,方便未來做更多頁面時可以有一套完整的評價體系。後來,我們還把這個toolkit推廣給了整個Shopify的設計團隊。

你看,一次沒能爆出顯著提升的改版,反而幫我們搭起了長期改進的基石。